java - Spring批处理仅限制单个作业实例
全部标签 在我的RubyonRails应用程序中,我需要并行执行50个后台作业。每个作业都会创建一个到不同服务器的TCP连接,提取一些数据并更新事件记录对象。我知道执行此任务的不同解决方案,但其中任何一个都是并行的。例如,delayed_job(DJ)可能是一个很好的解决方案,只要它可以并行执行所有作业。有什么想法吗?谢谢。 最佳答案 实际上可以运行多个delayed_jobworker。来自http://github.com/collectiveidea/delayed_job:#Runstwoworkersinseparateproces
我有一个应用程序可以对客户端发送的消息使用react。一条消息是reload_credentials,应用程序会在新客户端注册时收到该消息。然后,此消息将连接到PostgreSQL数据库,查询所有凭据,然后将它们存储在常规Ruby哈希(client_id=>client_token)中。应用程序可能收到的一些其他消息是start、stop、pause,它们用于跟踪某些session时间。我的观点是,我设想应用程序以下列方式运行:客户端发送消息消息进入队列正在处理队列但是,例如,我不想阻塞react器。此外,假设我在队列中有一条reload_credentials消息。在从数据库重新加载
在我的Rails4升级之后,尝试为我的任何ActiveRecord类创建一个新记录NoexplicitconversionofSymbolintoString例如,这里是我的链接的links_params方法deflink_paramsparams.require(:link).permit(:url_address,:group_id,:alt_text,:version_number,:position,:content_date,:verified_date)#Thisisline157end#line118is:@link=Link.new(link_params)但是我明白了
我遇到了sidekiq的问题:我想为作业设置超时,这意味着当作业的处理时间大于超时时,该作业将停止。我已经搜索了如何在文件sidekiq.yml中设置全局超时配置。但是我想为不同的单独作业设置单独的超时,这意味着定义工作人员的类之一将具有特定的超时配置。你能帮帮我吗?非常感谢。 最佳答案 没有批准的方法可以做到这一点。您无法在线程执行时安全地停止它。您需要更改工作以定期检查它是否应该停止。您可以为您正在进行的任何第3方调用设置网络超时,以便它们超时。 关于ruby-on-rails-如何
我正在为我的工作用Ruby编写一个作业调度应用程序(主要是为了以给定的频率使用各种协议(protocol)移动文件)我的主循环是这样的:whiletruedo#somecodetolaunchtheproperjobsleepCONFIG["interval"]end它的工作就像一个魅力,但我不确定它是否足够安全,因为该应用程序可能在运行cpu密集型软件的服务器上运行。是否有另一种方法可以做同样的事情,或者sleep()对我来说是否足够安全? 最佳答案 每当我觉得需要阻塞时,我都会使用事件循环;通常是libev。这是一个Ruby绑定
我有以下代码:beginsite=RedirectFollower.new(url).resolverescue=>eputse.to_sreturnfalseend抛出如下错误:方案http不接受注册表部分:www.officedepot.com;方案http不接受注册表部分:ww2.google.com/something;操作超时-connect(2)如何为所有类似方案http不接受注册表部分的错误添加另一个救援?因为我想做的不仅仅是打印错误并在这种情况下返回false。 最佳答案 视情况而定。我看到三个异常描述不一样。异常类
我编写的脚本在启动时运行,需要设置环境变量,但是Ruby的Exceptions,是最好的?我使用了LoadError,我只是想尽可能具有描述性并遵循适当的约定。其次,除了检查环境变量的长度外,我找不到其他方法来查看是否设置了环境变量,但这似乎不太优雅。beginraiseLoadErrorifENV['FOO'].to_s.length==0system"openhttp://example.com/"+ENV['FOO']rescueException=>eputs"=>#{e}FOOenvironmentvariablenotset"end 最佳答案
乍一看,我以为新的ruby2.0Thread.handle_interrupt会解决我所有的异步中断问题,但除非我弄错了,否则我无法让它做我想做的事(我的问题在最后和标题中)。从文档中,我可以看到如何避免在某个block中接收中断,将它们推迟到另一个block。这是一个示例程序:duration=ARGV.shift.to_it=Thread.newdoThread.handle_interrupt(RuntimeError=>:never)do5.times{putc'-';sleep1}Thread.handle_interrupt(RuntimeError=>:immedia
是否可以将sidekiq作业从SidekiqWorker实例级别直接移动到死队列(即在执行时)classMyWorkerincludeSidekiq::Workersidekiq_optionsretry:9defperform(name)ifname=='StackOverflow'#---->skip_retry_queue_and_go_to_dead_queueelse#do_stuff!endendend 最佳答案 在执行作业中不是动态的。静态地,如果您设置sidekiq_optionsretry:0,如果作业引发错误,它
我正在尝试使用rails3和resquescheduler测试future的调度作业:以下是我正在使用的代码,但我收到NoMethodErrorset_schedule。Resque.set_schedule("1",{:cron=>"306**1",:class=>"Notify",:queue=>"username",:message=>'notificationmessage'})我尝试使用简单的入队Resque.enqueue(Notify,params[:message])并且效果很好。更新:以下是我遇到的错误:undefinedmethod`set_schedule'for